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摘 要 人 类 在 说 话 或 思考 的 时 候 常常 伴随 着 手势 。 手 势 是 在 认 知 加 工 或 交流 过 
程 中 自动 产生 的 ， 上 共有 表征 性 ， 同 时 ， 手 势能 够 影响 人 类 的 认 知 加 工 。 尽 管 研究 
者 对 手势 的 概念 界定 各 有 侧重 , 但 普遍 认为 手势 不 同 于 直接 行动 , 具有 认 知 功能 。 
手势 认 知 功能 的 代表 性 理论 模型 有 词汇 索引 模型 \ 信 息 打包 假设 、 表 象 保持 理论 、 
语义 特殊 性 假设 和 骨 入 /延展 观 。 根 据 手 势 认 知 功 能 研究 中 主要 自 变量 的 不 同 ， 
可 以 把 手势 认 知 功能 分 成 三 种 不 同 的 研究 范式 ， 即 允许 -限制 手势 的 研究 范式 、 
侧重 手势 模式 改变 的 研究 范式 、 侧重 情境 改变 的 研究 范式 。 今 后 值得 关注 的 研究 
方向 除了 深入 探讨 手势 认 知 功能 的 神经 机 制 、 加 强 对 手势 认 知 功能 的 干预 研究 外 ， 
提出 了 建立 更 具 解 释 力 的 手势 认 知 功能 的 理论 模型 一 一 “空间 化 ”手势 假设 。 
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人 类 在 说 话 或 思考 的 时 候 常 常 伴随 着 手势 。 同 单纯 的 手 部 运动 不 同 , 手势 是 
通过 手 部 的 形状 或 运动 , 来 描述 人 的 行动 、 运 动 或 事物 的 形状 的 ， 这 种 描述 基于 
手势 形式 和 所 指示 对 象 的 相似 性 (McNeill, 1985). 因此, 手势 是 具有 表征 性 的 。 

许多 研究 证 实 ,手势 能 够 影响 人 类 的 认 知 加 工 ,对 语言 表达 (Goldin-Meadow， 
2000; McGregor，Rohlfing，Bean & Marschner 2009; Mol & Kita，2012)、 问 题解 


决 (Chu & Kita, 2015; Hostette & Alibali, 2010; Alibali, Spencer, Knox & Kita, 
2011)、 创 造 性 思维 (Beaudoin-Ryan & Goldin-Meadow, 2014; Leung, Kim, Polman, 
Ong, Qiu & Goncalo, 2012; Kirk & Lewis, 2017). 7J (Novack, Congdon, 
Hemani-Lopez & Goldin-Meadow, 2014) 等 均 具 有 显著 的 影响 作用 。 但 是 ， 目 前 
对 于 这 种 影响 作用 产生 机 制 的 研究 结果 却 并 不 一 致 , 由 此 形成 了 关于 手势 的 诸多 
里 论 模型 。 本 文 将 重点 综述 手势 认 知 功能 的 理论 模型 ， 对 手势 认 知 功能 的 研究 范 
式 也 进行 梳理 。 


2 手势 的 概念 界定 
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当前 , 手势 的 概念 界定 仍然 存在 争论 (McNeill, 1985; Gentner, 1982; Hostetter 
& Alibali，2008; Clark，2013)。 例 如 ， 一些 研究 从 功能 角度 出 发 来 对 手势 进行 界 
定 ， 认 为 手势 是 自发 的 伴随 语言 的 手 部 运动 McNeill，1992)， 是 一 种 结构 化 的 
表征 (Gentner, 1982), 它 通过 手 部 的 形状 或 运动 来 描述 行动 、 运 动 或 形状 (McNeill， 
1985), 是 抽象 的 、 脱离 了 行动 和 实物 的 表征 , 能 够 更 加 有 力 地 影响 思维 和 学 习 ， 
实现 知识 的 一 般 化 和 转化 Novack & Goldin-Meadow，2016)。 男 一 些 研究 则 从 
有 具 映 认 知 的 角度 出 发 , 认为 手势 是 具 吴 的 一 种 表达 方式 (Hostetter & Alibali, 2008), 
是 认 知 系统 延伸 的 物理 工具 ， 给 认 知 系统 提供 稳定 的 外 部 物理 的 和 视觉 的 表征 ， 
为 思维 提供 手段 (clark，2013)。 还 有 学 者 尝试 通过 实验 界定 什么 条 件 下 手 部 运 
动 会 被 知觉 为 手势 。 研 究 发 现 ， 当 有 目标 物体 呈现 、 手 型 呈 抓 握 状 、 有 语言 伴随 
时 的 空手 运动 更 容易 被 知觉 为 手势 (Novack, Wakefield & Goldin-Meadow, 2016)。 
虽然 手势 常常 伴随 着 语言 ， 但 是 否 伴 随 语 言 对 于 手势 的 识别 而 言 并 不 是 必须 的 ， 
环境 线索 和 自 上 而 下 的 加 工 可 以 实现 这 一 点 。 环境 线索 主要 包括 : 运动 的 内 部 线 
R (包括 手 型 、 路 径 、 节 奏 、 速 度 等 )、 运 动 的 外 部 线索 (包括 是 否 呈 现 目 标 物 
体 、 已 有 的 知识 经 验 等 ) 和 交流 线索 (包括 面部 表情 、 注 视 、 是 否 呈 现 倾 昕 者 等 )。 

Novack 和 Goldin-Meadow (2016) 认为 手势 总 体 上 可 以 分 为 表征 性 手势 和 非 
表征 性 手势 两 类 。 表 征 性 手势 又 可 以 分 为 : 描绘 性 手势 (iconic gestures), a 
性 手势 (metaphoric gestures)、 节 拍 性 手势 (beat gestures) 和 直 证 性 手势 (deictic 
gestures) (McNeill，1992)。 描 绘 性 手势 是 指 用 手 部 和 有 驹 膊 的 运动 来 呈现 具体 物 
体 或 运动 表象 的 手势 。 隐 喻 性 手势 是 指 利用 空间 来 呈现 抽象 意义 的 手势 。 节 拍 性 
手势 是 指 伴随 语言 的 节律 用 来 指示 语言 中 重要 单词 的 手 部 运动 。 直 证 性 手势 用 来 
指出 说 话 者 周围 目标 的 具体 位 置 。Lhommet 和 Marsella (2014) 将 手势 分 为 隐喻 
性 手势 、 符 号 手势 、 描 绘 性 手势 、 直 证 性 手势 四 种 类 型 。 还 有 学 者 从 语 境 的 角度 
来 定义 描述 性 手势 和 隐喻 性 手势 , 认为 具体 语 境 下 的 手势 是 描述 性 手势 , 语言 内 
容 是 抽象 内 容 时 的 手势 是 隐喻 性 手势 (Straube, Gree, Bromberger & Kircher, 2011). 

然而 ， 尽 管 对 于 手势 概念 的 界定 各 有 侧重 ， 但 仍然 具有 以 下 共识 : 

第 一 ， 手 势 具 有 认 知 功能 (Pouw, Nooijer, Gog, Zwaan& Paas，2014)。 手 
势能 够 反映 并 影响 个 体 的 认 知 加 工 C(Mol et al., 2012; Goldin-Meadow & Wagner, 
2005)， 对 个 体 的 语言 表达 、 创 造 性 思维 、 问 题解 决 等 认 知 活动 具有 显著 影响 。 


手势 能 增进 听 者 的 理解 , 是 交流 双方 感知 运动 信息 的 重要 来 源 (Cook & Tanenhaus， 
2009). 

第 二 , 手势 不 同 于 直接 的 行动 。 虽然 很 多 研究 证 实行 动产 生 的 潜能 或 者 行动 
产生 的 经 验 能 够 增加 手势 产生 的 频率 (Pine, Gurne & Fletcher, 2010; Hostetter et 
al.，2010)， 手 势 同 目标 性 行动 相 类 似 ， 当 有 目标 物体 时 手 部 运动 更 容易 被 知觉 
为 手势 (Novack et al.，2016)， 但 是 ， 手 势 是 不 同 于 直接 行动 的 。 手 势 并 不 直接 
操纵 物体 ， 是 表征 性 的 手 部 运动 ， 手势 的 目标 是 为 了 指示 或 表征 其 他 的 运动 、 物 
体 甚 至 是 抽象 概念 (Novack et al., 2016), 具有 一 半 具 体 、 一 半 抽 象 的 特点 (Novack 
et al.，2014)。 手 势 不 像 直接 的 行动 那样 被 具体 的 目标 束缚 ， 而 是 强化 了 对 于 目 
标 更 丰富 的 内 部 表征 , 在 颈 体 运动 和 思考 间 建 立 了 更 强 的 联系 ,是 一 种 图 式 化 的 
行动 。 手势 对 思考 有 比 实际 行动 更 强 的 影响 ,因为 手势 能 够 比 实 际 行动 更 强 地 影 
响 问题 解决 者 对 问题 的 表征 ,能 更 强 地 促进 对 空间 运动 信息 的 编码 (Kita，Alibali 
& Chu, 2017)。 

3 手势 认 知 功能 的 理论 模型 

为 了 探讨 手势 认 知 功能 的 心理 机 制 , 研究 者 从 不 同 的 角度 尝试 做 出 解释 ， 由 
此 形成 了 不 同 的 理论 模型 。 有 代表 性 的 有 词汇 索引 模型 、 信 息 打 包 假 设 、 表 象 保 
持 假设 、 语 义 特 殊 性 假设 和 骨 入 /延展 观 。 

3.1 词汇 索引 模型 

词汇 索引 模型 〈lexical index model) 认为 手势 涉及 口语 表面 形式 的 整合 ， 说 
话 者 的 手势 能 够 增强 词汇 的 激活 , 促进 语义 的 通达 。 手势 和 词汇 的 语义 成 分 有 共 
同 特 征 ， 能 够 促进 词汇 的 选择 或 者 跨 通道 的 表征 (Krauss，Chen & Gottesmann, 
2000)。 词 汇 索 引 模型 下 的 手势 研究 主要 针对 伴随 语言 的 手势 ， 关 注 手 势 对 语言 
流畅 性 的 影响 ， 认 为 限制 使 用 手势 时 ， 语 言 中 会 有 更 多 的 停顿 、 语 速 更 慢 、 更 不 
流畅 ， 还 会 有 更 多 的 舌尖 效应 现象 。Buccino (2001) 当 作出 手势 时 ， 大 脑 的 
布 洛 卡 区 也 被 激活 (Buccino et al.，2001)。 来 自 进化 神经 科学 的 证 据 表 明 ， 手 势 
与 语言 存在 进化 上 的 连续 性 ， 猴 脑 的 F5 区 和 人 脑 的 布 洛 卡 区 是 同 源 的 大 脑 区 域 

(Arbib, 2005). F5 区 负责 手 部 和 口 部 运动 的 视觉 运动 编码 CRizzolatti et al., 1988), 
后 部 F5 区 (F5p) 在 产生 和 控制 手 部 运动 中 起 关键 作用 (Raos, Umilta,，Murata， 
Fogassi & Gallese, 2006; Umilta, Brochier, Spinks & Lemon，2007)， 而 布 洛 卡 


区 是 负责 人 类 语言 加 工 的 主要 脑 区 。 这 说 明 布 洛 卡 区 CFS K) 可 能 同时 性 地 控 
| 着 手势 和 单词 发 音 。 
3.2 信息 打包 假设 

言 息 打包 假设 〈information packaging hypothesis) 认为 手势 在 将 空间 运动 信 
息 打 包 为 可 以 用 语言 表达 的 单元 的 过 程 中 起 作用 。 手 势能 够 帮助 提取 场景 中 的 相 
关 特 征 ， 然 后 打包 成 一 个 认 知 单元 (Gentner，1982)。 研 究 发 现 ， 越 困难 的 信息 
打包 ， 激 活 越 多 的 手势 (Kita, De & Mohr, 2007; Kita & Davies, 2009). 
Goldin-Meadow (2015) 采用 英语 和 土耳其 语 被 试 进行 的 跨 文化 手势 研究 中 ， 在 
伴随 语言 的 条 件 下 ,两 种 语言 的 被 试 存在 不 同 的 手势 模式 。 英 语 被 试 表 现 出 合并 
的 模式 ， 将 方式 和 路 径 合 并 为 一 个 手势 ， 而 土耳其 语 被 试 表 现 出 单独 的 模式 ， 用 
一 个 手势 表示 路 径 ， 另 一 个 手势 表示 方式 ， 且 经 常 只 有 路 径 手 势 而 无 方式 手势， 
这 同 语言 本 身 的 特点 是 相 吻 合 的 。 但 在 无 语言 伴随 条 件 下 ,两 者 都 倾向 于 用 一 个 
手势 同时 性 的 表征 路 径 和 方式 。 这 证 明了 当 人 类 不 利用 语言 传达 运动 事件 时 “ 自 
然 语 义 组 织 ” 的 存在 。 对 运动 事件 的 表达 受到 用 有 限 的 努力 去 传递 综合 性 信息 的 
需要 驱动 ， 因 此 ， 在 手势 中 会 倾向 于 将 信息 进行 打包 。Mol 和 Kita (2012) 在 研 
究 中 指导 被 试用 同一 个 手势 来 表示 方法 和 路 径 , 或 者 用 不 同 的 手势 分 别 表示 方法 
和 路 径 ， 并 观察 语言 中 方法 和 路 径 信 息 的 打包 情况 。 研 究 发 现 ， 如 果 要 求 被 试用 
一 个 手势 来 同时 表征 方式 和 路 径 , 他 们 也 倾向 于 将 这 些 信 息 用 语言 中 的 一 个 句子 
表达 ; 如 果 要 求 被 试用 单独 的 手势 分 别 表达 方式 和 路 径 , 他 们 也 倾向 于 用 单独 的 
句子 来 分 别 表 达 方 式 和 路 径 。 说 明 人 们 做 手势 的 方式 影响 了 说 话 的 方式 ， 符 合 信 
息 打 包 假 设 。 而且， 在 两 种 手势 条 件 下 ， 被 试 对 方式 词 的 使 用 高 度 相关 ， 说明 不 
同 的 手势 模式 并 未 显著 影响 被 试 语言 中 的 词汇 选择 , 手势 并 非 通过 词汇 影响 语言 
表达 的 。 
3.3 表象 保持 理论 

表象 保持 理论 (image maintenance theory) 认为 ,手势 能 激活 并 保持 说 话 者 
所 存储 的 心理 表象 ， 否 则 ， 表 象 会 迅速 消退 。 

根据 手势 表象 保持 理论 我 们 可 以 看 到 手势 的 作用 。 首先, 手势 能 够 丰富 听 者 
的 心理 表象 ， 尤 其 是 关于 空间 方面 的 心理 表象 。 视 觉 实 际 上 是 以 手 部 为 中 心 的 。 
当 我 们 运动 时 , 看 见 自己 的 手 和 和 手 的 位 置 至 关 重 要 。 如 果 接 收 到 手 部 的 错误 视觉 
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言 妃 ， 会 损害 我 们 做 出 指向 特定 目标 的 手 部 运动 的 能 力 , 手 在 表征 运动 朝向 中 占 
据 中 心地 位 (Loughlin, 2016), 限制 手势 时 语言 的 表象 性 也 会 降低 (Rimé, Bernard, 
Schiaratura，Hupet & Ghysselinckx，1984)。 其 次 ,手势 是 非常 好 的 捕捉 视觉 和 空 
间 信 息 的 工具 ， 特 别 适合 用 来 描述 空间 关系 ， 比 如 : 一 座 医 院 的 位 置 、 一 个 街区 
的 布局 等 。 语言 内 容 同 空间 或 视觉 表象 无 关联 时 也 会 伴随 手势 ,， 是 因为 人 们 通过 
手 部 的 运动 和 形状 采用 视觉 和 空间 的 形式 去 描述 非 空间 的 信息 ， 比 如 : 解释 数学 
等 式 2+3=5 时 的 手势 ， 就 是 通过 空间 运动 的 形式 传达 数学 关系 (Cook，Nusbaum 
& Goldin-meadow，2004)。 因 此 ， 手 势 虽然 不 是 词汇 提取 所 必须 的 ， 但 是 可 以 通 
过 表象 来 促进 词汇 的 提取 (Wesp, Hesse, Keutmann & Wheaton, 2001). 
3.4 语义 特殊 性 假设 

人 们 在 思考 或 者 讲述 关于 运动 的 内 容 时 ， 相 比 其 他 内 容 会 产生 更 多 的 手势 。 
语义 特殊 性 假设 (The semantic specificity hypothesis) 认为 具体 的 、 可 描绘 的 、 

空间 的 、 可 操纵 的 语义 成 分 会 激发 更 高 的 手势 率 。Pine SA (2010) 让 被 试 进行 

物体 描述 任务 ， 通 过 对 被 试 的 语言 和 手势 进行 分 析 发 现 ， 无 论 是 否 呈 现 倾听 者 ， 
被 试 对 操作 性 强 的 目标 的 描述 中 有 更 多 的 描绘 性 手势 , 语义 中 包含 高 空间 运动 成 
分 会 激活 更 多 的 手势 。Chu 和 Kita (2015) 的 研究 也 得 出 了 类 似 的 结论 。 
3.5 嵌入 /延展 观 

持 嵌 入 /延展 观 (embedded/extended perspective) 的 研究 者 认为 ， 手 势 是 认 
知 系统 延伸 的 物理 工具 ,为 问题 解决 提供 外 部 支持 , 为 思维 提供 手段 (Clark, 2013 )。 
他 们 主要 关注 在 问题 解决 中 产生 的 手势 ， 发 现 当 个 体 受 到 外 部 (高 认 知 负 荷 、 从 
环境 中 提取 信息 难度 大 等 ) 或 内 部 〈 低 工作 记忆 能 力 ) 的 限制 时 ， 认 知 系统 倾向 
于 选择 更 容易 获得 的 、 外 部 文 持 的 问题 解决 策略 ， 从 而 产生 手势 《Clark，2008， 
2013; Wheeler，2013)。 手 势 还 可 以 促进 分 类 。Sixtus，Fischer 和 Lindemann 让 
被 试 根据 照片 做 出 指示 数字 的 手势 或 者 不 指示 数字 的 手势 , 同时 对 听觉 呈现 的 数 
字 进 行 分 类 。 只 有 做 出 指示 数字 的 手势 时 才能 促进 被 试 对 听觉 呈现 的 数字 的 分 类 
反应 ， 而 做 出 非 指示 数字 的 手势 时 却 无 该 效应 (Sixtus, Fischer & Lindemann, 
2017). 


4 手势 认 知 功能 的 研究 范式 


由 于 不 同 研究 者 对 手势 的 概念 界定 各 有 侧重 ,所 采用 的 研究 范式 也 不 尽 相 同 。 
根据 手势 认 知 功能 研究 中 主要 自 变 量 的 不 同 将 已 有 研究 范式 分 为 以 下 三 类 : 
4.1 允许 -限制 手势 的 研究 范式 

这 是 研究 手势 的 认 知 功能 最 常 采用 的 研究 范式 ,研究 者 将 被 试 随机 分 成 两 组 ， 
一 组 鼓励 或 允许 其 使 用 手势 ,， 另 一 组 限制 其 使 用 手势 ,让 被 试 完成 一 定 的 认 知 任 
务 , 以 测量 手势 对 任务 完成 的 影响 作用 。Beaudoin-Ryan 和 Goldin-Meadow( 2014 ) 
将 五 年 级 的 学 生 随 机 分 配 到 鼓励 手势 、 不 鼓励 手势 、 控 制 组 三 种 条 件 中 ， 完 成 柯 
尔 伯 格 道德 两 难 任务 , 鼓励 手势 组 被 试 的 观点 采 择 能 力 显 著 增强 。 让 被 试 记忆 一 
个 路 线 , 一 种 条 件 下 被 试 可 以 无 声 地 用 手势 模拟 路 线 ， 男 一 种 条 件 下 ,被 试 只 能 
观察 ， 两 手中 各 握 着 一 个 球 ， 以 限制 被 试 的 手势 ， 能够 用 手势 模拟 路 线 的 被 试 对 
路 线 的 回忆 显著 好 于 限制 手势 组 被 试 (So, Ching, Lim, Cheng & Lp, 2014). Cook 
等 (2004) 让 被 试 在 允许 或 限制 手势 条 件 下 ， 进 行 语 言 和 视觉 空间 材料 的 记忆 。 
允许 手势 比 限制 手势 条 件 下 被 试 对 两 种 记忆 材料 都 记 住 了 更 多 的 条 目 , 说 明 手 势 
不 仅 能 显著 地 促进 语言 工作 记忆 ， 同 样 能 够 促进 视觉 空间 工作 记忆 。 此 外 ， 是 否 
允许 使 用 手势 还 能 影响 问题 解决 中 所 依赖 的 信息 类 型 和 策略 选择 (Alibali et al., 
2011). 


4.2 侧重 手势 模式 改变 的 研究 范式 
这 类 研究 范式 往往 通过 考察 不 同 的 手势 模式 对 认 知 活动 的 影响 来 研究 手势 

的 认 知 功能 。Mumford 和 kita(2013) 和 尝试 采用 不 同 的 手势 教授 三 岁 儿 童 表示 状态 
转换 或 方式 的 新 奇 词汇 。 通 过 方式 手势 进行 学 习 的 儿童 表现 出 更 强 的 方式 偏好 ， 
说 明 特殊 形式 的 手势 指导 着 儿童 对 于 新 奇 词汇 的 解释 。Mol 等 (2012) 研究 了 不 
同 手势 模式 对 语言 中 句法 结构 的 影响 ,还 有 学 者 研究 了 手指 抓 握 或 打开 的 动作 对 
数值 提取 的 影响 (Grade，Badets & Pesenti, 2016). Leung 等 (2012) 的 研究 中 
让 被 试 说 出 教学 楼 的 新 奇 用 法 , 同时 进行 一 个 演讲 研究 (要求 被 试 手心 向 上 伸 出 
一 侧 的 手 和 腹 彩 )。 实 验 分 为 两 个 trial， 被 试 回答 的 问题 相同 (但 被 试 提前 并 不 
知情 )。 实 验 组 被 试 在 trial 间 交 换 左右 手 的 位 置 〈 右 手 向 上 伸 出 ， 左 手背 在 身后 
/左手 向 上 伸 出 ， 右 手背 在 身后 )， 而 控制 组 被 试 两 个 trail 的 手 部 姿势 相同 。 交 换 
左右 手 位 置 能 够 提高 被 试 发 散 思 维 的 流畅 性 、 灵 活性 和 独创 性 。Novack 等 人 
(2014) 研究 了 具体 手势 和 抽象 手势 对 学 习 的 影响 作用 ,发 现 相 比 具体 手势 ， 教 


学 中 使 用 抽象 手势 更 能 促进 对 知识 的 概括 化 学 习 。 
4.3 侧重 情境 改变 的 研究 范式 

这 种 研究 范式 侧重 于 考察 任务 难度 、 交 流 背景 、 文 化 差异 等 背景 因素 的 改变 
对 手势 选择 的 影响 。 当 被 试 学 习 较 为 复杂 的 科学 系统 图 表 , 并 将 其 解释 给 专家 或 
者 新 手 时 , 被 试 对 新 手 进行 的 解释 伴 有 更 多 描述 性 手势 ， 而 对 专家 解释 时 则 伴 有 
更 多 直 证 性 手势 , 且 对 新 手 解 释 时 比 向 专家 解释 打包 了 更 多 的 信息 ,尝试 通过 多 
种 途径 传达 信息 (Kang，Tversky Black，2015)。 还 有 研究 侧重 于 任务 难度 同 手势 
之 间 的 关系 (Chu & Kita, 2008, 2011; Kita et al., 2007; Kita etal., 2009; Hostetter 
et al.，2011)， 发 现任 务 越 困 难 ， 手 势 越 多 。Chu 等 (2015) 研究 了 心理 旋转 任 
务 和 运动 事件 描述 任务 中 目标 的 可 操作 性 不 同 对 手势 的 影响 , 目标 可 操作 性 强 组 
被 试 的 手势 频率 显著 高 于 目标 可 操作 性 弱 组 被 试 ， 同 Pine A (2010) 的 研究 
结果 一 致 。 
5 总 结 与 展望 


5.1 对 已 有 理论 及 研究 的 总 结 

研究 者 已 经 尝试 从 不 同 角度 建立 理论 模型 对 手势 认 知 功能 的 产生 和 作用 机 
制 进行 解释 , 但 是 , 这些 模型 都 往往 只 能 解释 某 种 或 者 部 分 手势 类 型 影响 认 知 的 
作用 机 制 ， 而 无 法 从 更 广 的 维度 上 做 出 有 力 的 解释 。 
5.1.1 对 手势 认 知 功能 的 解释 力 较 低 

已 有 的 理论 和 研究 更 多 关注 手势 的 交流 功能 ， 如 手势 对 交流 的 促进 、 对 语言 
的 影响 、 对 感知 运动 信息 交流 的 促进 等 。 

词汇 索引 模型 关注 手势 在 语义 通达 中 的 作用 , 部 分 的 解释 了 手势 同 语言 流畅 
性 之 间 的 关系 , 说 明了 手势 同 语言 之 间 存 在 某 种 程度 的 相关 , 但 无 法 有 效 地 解释 
手势 在 语言 结构 、 语 法 特征 等 更 复杂 层面 的 作用 发 挥 机 制 ,也 无 法 有 效 解 释 手势 
在 非 言 语 任务 中 作用 发 挥 的 机 理 。 信 息 打 包 假 设 认为 手势 将 空间 运动 信息 打包 成 
适合 语言 表达 的 认 知 单元 , 降低 了 认 知 负荷 。 该 假设 框架 下 的 研究 方法 更 多 关注 
的 是 手势 模式 同 语言 表达 的 关系 ,虽然 关注 的 单元 较 词汇 更 大 , 但 对 如 何 打包 信 
恩 、 非 空间 运动 信息 的 打包 等 关键 问题 未 能 做 出 清晰 明确 的 解释 。 表象 保持 理论 
主要 关注 手势 在 提升 工作 记忆 中 所 加 工 信 息 的 表象 性 及 表象 保持 的 时 间 上 的 重 


要 作用 , 却 对 其 他 认 知 过 程 和 认 知 活动 中 手势 功能 的 发 挥 缺 乏 有 力 的 解释 。 语 义 
特殊 性 假设 关注 到 了 空间 的 、 可 操纵 的 语义 成 分 同 更 高 的 手势 率 之 间 的 相关 ， 且 
认为 是 特殊 的 语义 成 分 单 向 性 的 激活 了 手势 。 该 理论 无 法 有 效 地 解释 手势 对 语言 
表达 、 问 题解 决 、 创 造 思 维 、 学 习 等 的 影响 作用 。 藤 入 /延展 观 认为 手势 是 认 知 
系统 的 外 部 物理 延展 ， 同 空间 位 置 存在 内 隐 联 结 。 该 理论 具有 一 定 的 合理 性 ， 但 
其 框架 下 的 研究 更 多 关注 手势 的 具 身 性 , 对 手势 的 认 知 功能 及 其 如 何 实现 关注 不 
足 。 

Kita 等 《2017) 在 对 手势 相关 研究 进行 综述 的 文章 中 尝试 建立 一 个 新 的 理 t 
框架 一 一 手势 概念 化 假设 (gestures-fore-conceptualization hypothesis )。 该 假设 解 
释 了 手势 的 自我 指向 功能 ， 认 为 手势 通过 激活 、 操 纵 、 打 包 、 探 索 空 间 运 动 信息 
四 条 路 径 影响 认 知 加 工 。 但 该 理论 只 关注 了 手势 的 表征 性 和 手势 的 自我 指向 功能 ， 
且 尚 缺乏 实验 研究 提供 的 支持 性 证 据 。 

从 手势 认 知 功能 的 研究 范式 来 看 ， 人 允许 -限制 手势 的 研究 范式 主要 研究 有 无 
手势 和 自发 性 手势 对 认 知 活动 的 影响 , 侧重 手势 模式 改变 的 研究 范式 主要 考察 不 
同 模式 的 手势 ， 如 手 型 、 方 位 、 路 径 等 对 认 知 活动 的 影响 。 侧 重 情境 改变 的 研究 
范式 则 将 手势 作为 因 变量 , 研究 任务 难度 、 交 流 背 景 、 文 化 差异 等 对 手势 选择 的 
影响 。 而 且 ， 已 有 的 研究 范式 大 多 为 行为 研究 范式 ， 能 够 从 不 同 侧面 揭示 手势 对 
语言 及 其 他 认 知 活动 的 影响 , 但 无 法 对 手势 认 知 功能 的 内 部 认 知 神经 结构 和 作用 
机 制 进行 更 为 深入 的 分 析 和 研究 。 

5.1.2 对 隐喻 性 手势 具 身 性 的 研究 有 待 深入 

几 十 年 来 , 心理 学 家 围绕 语言 理解 的 共和 喘 性 进行 了 大 量 研究 。 其 中 不 仅 有 在 
语言 理解 过 程 中 感知 参与 的 研究 (如 , Kaup, Yaxley, Madden, Zwaan, & Liidtke, 2007; 
Connell, 2007; 张 盼 ， 鲁 忠义 )， 更 有 众多 的 实验 证 据 表 明 语 言 理 解 中 还 有 动作 
特别 是 手 部 动作 的 激活 和 模拟 。 如 动词 的 “推拉 ” Glenberg 和 Kaschak (2002) 
的 研究 发 现 ， 阅 读 “关上 抽 导 ”时 被 试 对 远离 身体 的 目标 反应 更 快 ， 而 “ 拉 开 抽 
层 ” 则 对 趋 近 身体 的 目标 反应 更 快 。 再 如 动词 的 旋转 ， 被 试听 到 “拧紧 螺丝 ”的 
句子 时 , 顺 时 针 旋 转 方 向 的 动作 更 快 (Zwaan & Taylor, 2006)。 还 有 Tucker 和 Ellis 

(2001) 的 研究 ， 他 们 发 现在 对 大 小 不 同 的 物体 如 “钥匙 ”和 “土豆 ”做 是 不 是 
自然 物 的 判断 时 ， 对 细小 的 物体 被 试 精细 的 “ 捏 的 动作 被 激活 ， 而 对 大 的 物体 


A> 


激活 的 则 是 满 把 “ 握 ” 的 大 动作 。 这 些 研 究 比 起 传统 的 语言 理解 研究 来 是 个 进步 ， 
正如 Glenberg 和 Gallese (2012) 的 文章 中 所 说 ， 语 言 符号 通过 感知 、 运 动 和 情 
绪 系 统 而 变 得 更 有 意义 。 

从 以 往 的 这 些 研究 可 以 看 到 两 点 : 一 是 语言 理解 的 具 身 研究 主要 关注 的 是 具 
体 概 念 而 且 是 它 的 本 义 ; 二 是 在 语言 理解 中 手 部 做 出 的 是 一 种 简单 的 具 身 反应 或 
动作 。 相 对 而 言 ， 抽 象 概念 ， 特 别 是 隐喻 概念 的 具 身 认 知 研究 显得 不 够 系统 和 深 
A» ALE, 今后 的 研究 从 具体 概念 的 本 义 扩展 到 抽象 概念 的 喻 义 ， 将 含有 手 部 有 具 
体 动作 的 手势 扩展 到 一 种 表征 性 语言 的 手势 , 势必 会 把 语言 理解 的 县 号 研究 推 向 
深入 。 

隐喻 性 手势 能 够 利用 空间 呈现 抽象 意义 。 比 如 ， 表 达 “ 抓 住 一 个 灵感 ”时 伴 
随 的 手势 通常 是 杯 状 手 型 或 者 好 像 手 里 握 着 什么 东西 , 手势 就 好 像 一 个 容器 ， 这 
是 管道 隐喻 (conduit metaphor) 手势 。 管 道 隐喻 手势 还 可 以 通过 将 其 代表 的 概 
念 放 入 空间 中 来 说 明 几 个 概念 之 间 的 关系 (Hasegawa, Shirakawa, Shioiri, Hanawa 
& Ohara，2015 )。 相 较 于 其 他 类 型 而 言 ， 隐 喻 性 手势 因 其 同 抽象 概念 和 语义 表征 
的 紧密 联系 对 研究 手势 认 知 功能 , 尤其 是 高 级 的 认 知 功能 有 更 为 重要 的 意义 和 价 
值 。 已 有 研究 者 从 具 身 认 知 角度 出 发 ,证实 了 手势 同 空间 位 置 的 联结 ， 发 现 食指 
同上 部 (top)、 拇 指 同 下 部 (bottom) 的 内 隐 性 概念 联结 (Romano, Marini & 
Maravita，2017)。 同 时 ， 手 指 抓 握 动 作 还 能 够 影响 被 试 在 数字 提取 任务 中 提取 
数值 的 大 小 , 抓 握 时 提取 的 数值 小 , 手指 打开 时 提取 的 数值 大 (Grade et al., 2016). 
然而 ， 目 前 关于 隐喻 性 手势 具 身 性 的 研究 还 不 够 系统 和 深入 ， 缺 乏 对 隐喻 性 手势 
具 身 性 的 理论 模型 、 神 经 机 制 、 干 预 等 方面 的 深入 研究 。 


5.2 对 未 来 研究 的 展望 


5.2.1 建立 具有 更 强 解释 力 的 手势 认 知 功能 的 理论 模型 

通过 对 已 有 的 关于 手势 认 知 功能 的 理论 和 实验 研究 进行 综合 分 析 发 现 , 手势 
能 够 激活 并 保持 空间 表象 , 促进 对 空间 运动 信息 的 通达 和 交流 ,实现 对 非 空间 信 
息 的 “空间 化 ”， 进 而 易 化 知觉 集 略 的 选择 。 因 此 ， 从 具 身 认 知 角度 出 发 ， 针 对 
隐喻 性 手势 的 认 知 功能 ， 我 们 提出 了 “空间 化 ”手势 假设 。 

“空间 化 ?手势 假设 的 基本 内 涵 是 抽象 概念 的 理解 根植 于 手 部 在 空间 的 感知 
运动 ， 以 手 部 的 手 型 、 路 径 、 位 置 等 凸显 、 强 调 并 组 织 空间 运动 信息 ， 有 效 地 将 


非 空间 运动 信息 转换 为 空间 运动 信息 ， 提 高 信息 的 视觉 或 动 觉 表 征 ， 降 低 认 知 负 
荷 ， 促进 问题 的 解决 。 比 如 : 用 两 只 手 分 别 代表 解决 问题 的 一 种 可 能 性 和 另 一 种 
可 能 性 能 促进 对 问题 的 多 元 表征 , 从 手心 朝 上 转换 为 手背 朝 上 能 够 促进 对 观点 的 
反方 向 思考 。 因 此 ， 从 有 具 吴 认 知 的 理论 看 ， 手 势 反 映 的 是 身体 的 感觉 和 运动 信息 
的 编码 。 根 据 我 们 提出 的 手势 空间 化 假设 , 人 类 在 思考 或 者 谈论 关于 感知 ,表象 、 
情境 时 会 根据 不 同 的 交流 意图 ， 将 时 间 、 因 果 、 道 德 、 情 绪 等 主要 隐喻 的 抽象 特 
征 都 映射 到 具体 的 物理 特征 上 ， 进 而 形成 手势 。 

这 种 映射 机 制 主要 分 为 两 种 : 一 种 是 列举 , 一 种 是 对 比 (Lhommet et al.,2014)。 
列举 是 将 对 象 利 用 手势 依次 描述 出 来 。 比 如 : 用 右手 食指 依次 点 数 左 手 的 食指 、 
中 指 、 无 名 指 和 小 拇指 来 代表 事物 的 四 个 方面 。 对 比 可 以 视 为 轴线 隐喻 ， 通 过 将 
每 个 对 象 变 为 一 个 基于 轴线 上 不 同位 置 的 刻度 值 (scalar value) 来 显示 两 个 或 多 
个 对 象 之 间 的 差异 。 轴 线 又 可 以 分 为 水 平 轴线 、 垂 直 轴 线 和 前 后 轴线 。 水 平 轴线 
和 前 后 轴线 大 多 表示 时 间 隐 喻 。 使 用 水 平 轴线 时 大 多 主体 未 投入 其 中 , 对 右 利 手 
个 体 而 言 左 侧 一 般 表示 过 去 ,中间 表示 现在 ， 右 侧 表 示 示 来。 使 用 前 后 轴线 时 主 
体 参 与 其 中 , 一 般 主体 的 前 方 表示 未 来 ,后方 表 示 过 去 。 垂 直 轴 线 是 指 利 用 手势 
的 垂直 空间 位 置 来 映射 抽象 概念 ， 比 如 多 的 在 上 ， 少 的 在 下 ; 道德 在 上 ,不 道德 
在 下 ; 积极 情绪 在 上 ， 消 极 情绪 在 下 等 。 通 过 从 抽象 特征 向 有 具体 特征 的 映射 ， 手 
势 一 方面 促进 对 空间 运动 信息 的 激活 (So et al.，2014; Hostetter et al., 2008, 
2010; )、 保 持 (Romano etal., 2017) 和 交流 (Buccino et al., 2001; Cook et al., 


2009; Pine et al.，2010; Clark, 2013; Moletal., 2012; Chu et al.，2015)， 易 
化 空间 运动 信息 的 表征 ; 另 一 方面 促进 对 非 空 间 运 动 信 息 的 “空间 化 ” 实现 对 
非 空间 运动 信息 更 有 效 的 通达 (Alibali et al., 2011; Goodrich & Hudson, 2009; 


Goldin-Meadow, Nusbaum, Kelly & Wagner, 2001; Grade et al.，2016; Sixtus et 


al., 2017). 4] (Kitaetal., 2007; Kita etal., 2009; Gentner, 1982) 和 组 织 
(Beaudoin-Ryan etal., 2014; Chu etal., 2008,2011; Kirk etal., 2017; Leung et 
al.，2012)。 总 之 ， 通 过 手势 降低 了 知觉 负荷 ， 易 化 了 信息 加 工 。 

该 假设 具有 较 强 的 解释 力 , 但 它 是 建立 在 对 已 有 研究 的 综述 和 理论 设想 基础 
上 的 ,下 一 步 我 们 要 进行 这 方面 的 实验 研究 , 以 得 到 更 为 有 力 的 实验 证 据 的 文 持 。 
5.2.2 深入 探讨 手势 认 知 功能 的 神经 机 制 


现 有 的 关于 手势 认 知 功能 的 研究 大 多 数 都 是 通过 行为 实验 进行 的 , 个 别 研究 
尝试 采用 功能 核磁 共振 成 像 (fMRI) 来 考察 手势 认 知 功 能 背后 的 生理 机 和 省 

(Goldin-Meadow et al.，2001; Buccino et al.，2001)， 但 研究 数量 较 少 。 而 且 ， 
现 有 研究 大 多 采用 离线 分 析 的 方式 , 导致 对 手势 认 知 功能 的 分 析 和 研究 时 间 分 辨 
力 较 低 ， 也 使 研究 结果 的 信 效 度 大 打折 扣 。 因 此 ， 未 来 的 研究 应 当 采 用 功能 性 核 
人 磁 共 振 成 像 、 事 件 相 关 电 位 等 技术 进一步 实时 地 探讨 手势 认 知 功能 的 神经 机 各 
5.2.3 加 强 对 手势 认 知 功能 的 干预 研究 

手势 伴随 着 人 类 说 话 和 思考 的 过 程 ， 通 过 手势 实现 了 知识 的 一 般 化 和 转化 。 
手势 具有 强大 的 认 知 功能 。 相 较 于 实际 行动 而 言 , 手势 更 能 够 有 力 地 促进 人 类 的 
认 知 和 思维 (Novack etal., 2016; Kita et al.，2017)。 大 量 研究 证 实 手 势能 够 影 
响 人 类 的 认 知 加 工 , 甚至 对 诸如 问题 解决 (Chu et al., 2015; Hostetter et al., 2010; 
Alibali et al., 2011), 创造 性 思维 (Beaudoin-Ryan et al., 2014; Leung et al., 2012; 
Kirk et al.，2017) 也 有 显著 性 的 影响 。 然 而 ， 目 前 的 研究 大 都 还 停留 在 基础 研究 
的 阶段 ， 关 于 利用 手势 促进 和 人 类 学 习 (Novack et al.，2014)、 思 维和 创造 性 的 干 
预 研究 还 非常 少 ， 这 极 大 地 影响 了 手势 认 知 功能 的 有 效 发 挥 。 今 后 ,应 当 注 重 和 
加 强 对 于 手势 认 知 功能 的 干预 研究 , 根据 已 有 的 研究 结果 , 设计 同 手势 相关 的 干 
预 方案 ， 以 进一步 提高 手势 模式 的 应 用 价值 。 


ds 


d= 
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A new perspective on the cognitive function of gestures: The 
"Spatializing " Gesture Hypothesis 
YU Wenhua; LU Zhongyi 
(Hebei Nomal University,Shijiazhuang 050024, China) 

Abstract: Human beings often make gestures when talking or thinking. Gestures are generated 
automatically during cognitive processing or communication, and as representations, they in turn 
affect human cognitive processing. Although researchers have different emphasis on the concept of 
gestures, it is generally believed that gestures are different from direct actions and have internal 
and external cognitive functions. Seminal theoretical models include Lexical Index Model, 
Information Packing Hypothesis, Image Maintenance Theory, Semantic Specificity Hypothesis and 
Embodied/Extended Perspective. According to the main independent variables, the research 
paradigms fall into three categories, namely, allow-and-limit gestures, the change of gesture 
patterns, and changes of situation. In addition to in-depth study of the neural mechanism of 
cognitive functions of gestures and their intervention research, this paper proposes a theoretical 
model with more explanatory power - the "Spatializing" Gesture Hypothesis. 
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